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@ Vorrichtung zur Aufnahme des Netzhautreflexbildes und Oberlagerung von Zusatzbiidem im Auge 



) Es wird eine Vorrichtung zur Aufnahme des auf der 
menschlichen Netzhaut des Auges abgebildeten Bildes der 
AuEenweit mit Hilfe einer scannenden Aufnahmevorrichtung 
vorgeschlagen. bai der die Strahlsn der Au&enwalt durch die 
Glaser einer Brilie transmittiert werden, die auf Ihren 
Innenseiten als gewdlbte abbildende Strahlteilerspiegel ge- 
staitet sind und bei der zur Aufnahme des von jedem Punkt 
der Netzhaut zuruckgestreuten und aus dem Auge austre- 
tendan parailalen Strahlenbundel und zu ihrer Abbiidung 
und Umlenkung eine zweiachsige Scanvorrlchtung vorgase- 
hen ist die das Lichtbundel zu einem opto-eiektronischen 
Detektor zur seriellen Aufnahme des Netzhautreftexes wai- 
terleitet. 
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Beschreibiing 

Die Erfmdung betrifft eine Vorrichtung, die es ermdg- 
licht, das auf der Netzhaut des menschlichen Auges pro- 
jizierte Bild der Aufienwelt in RQckstreuung aufztmeh- 
men, dieses mit elektronischer Bildverarbeitung zu mo- 
difizieren, bzw. mit zusatzlichen Informationen zu er- 
ganzen, und mit Hilfe einer Laserstrahlmodulation und 
-ablenkung zuruck ins Auge mit dem Originalbild zu 
uberlagern. 

Mit dem zunehmenden Bedarf an Informationen und 
ihrer Qbersichtlichen bildhaften Visualisierung wachsen 
die technischen Anforderungen an die Axifnahme, Ver- 
arbeitung und Wiedergabe von Bildem. Der rasche 
Fortschritt auf diesen Gebieten geht Hand in Hand mit 
der immer schneller werdenden Bildverarbeitung durch 
Computer. 

Das Hauptanwendungsgebiet der elektronischen 
Bildverarbeitung ist heute die Weiterverarbeitung von 
Bildem, die von Kameras, Abtastsystemen und Senso- 
ren, sowohl im siciitbaren Lichtbereich, als auch in ande- 
ren Bereichen des elektromagnetischen Spektrums, wie 
z. B. im Intrarot-, Radio- und Rontgenbereich, aufge- 
nommen werden. Nach der elektronischen Bearbeitung 
werden die Bilder als Einzelbilder, bzw. als bewegte 
Bilder auf einer Bilddarstellungsflache (Display) zur In- 
formationsaufnahme des Auges wiedergegeben. 

Mit Hilfe der elektronischen Bildverarbeitung ist es 
einerseits mOglich, besondere Bildinhalte leichter er- 
kennbar zu machen. Hierfur eingef uhrte Techniken, sind 
Z.B. Ortsfrequenzfilterung, Kantenverscharfung, Bild- 
datenkompression, Bildkorrelation, Dynamikreduzie- 
rung und Falschfarbenkodierung. Andererseits befassen 
sich weitere Techniken mit der Uberlagerung oder Sub- 
traktion von Zusatzbildem aus verschiedenen Spektral- 
bereichen, oder der Oberis^erung von gespeicherten 
Pllnen, Landkarten, und Zeichnungen in das Original- 
bild. 

Fur viele Anwendungen, ist eine praktisch verzoge- 
rungsfreie Bilddarstellung fur das Auge von groBem 
Vorteil, wie z. B. beim Fuhren eines Flugzeuges, eines 
Schiffes, eines Fahrzeuges oder bei der Steuerung und 
Oberwachung von Prozessen und Fertigungsstrafien. 
Mit der Bildverarbeitung kann eine gezielte Erhohung 
bzw. Reduktion des Informationsgehaites des aktuellen 
direkten Bildes durchgefuhrt werden. Die Anwendun- 
gen reichen von Erhohimg des Biidkontrastes bis zur 
Einblendimg von Zusatzinformationen und Kennzeich- 
nung von Details und Gef ahren« 

In den meisten dieser Anwendungen ist es nachteilig, 
dafi die elektronische Kamera ein von dem Auge des 
Menschen getrenntes "zweites Augensystem" darstellt, 
denn zum einen werden die Bilder von einem anderen 
Aufhahmeort aus gesehen und ziim anderen werden auf 
dem Bildschirm an einem anderen Betrachtungsort als 
den des Auges dargestellt Das menschiiche Auge muB 
somit zwischen der direkten und der indirekten Beob- 
achtung, mit unterschiedlichen Betrachtungswinkeln, 
Bildausschnitten und GroBenverhaltnissen standig 
wechseln, was zu korperlichen Beeintrachtigungen und 
Verzogerungen bei Entscheidungsvorgangen fuhrt 

Diese Einschrankung konnte zum Teil mit Hilfe der 
Technik des "Head-Up-Displays (HUDf, bei der Fuh- 
rung von Kampfflugzeugen dadurch gelost werden, daB 
wichtige Informationen wie Instiunentenanzeigen und 
Zieldaten in die offene Brille des Pilotenhehnes tmd da- 
mit in das Gesichtsfeld des Piloten eingeblendet werden. 
Diese Technik wird auch versuchsweise in der Automo- 



bilindustrie zur Einblendung von Instruinentenanzeigen 
in die Windschutzscheibe eingesetzt, damit der Fahrer 
von der Beobachtung der vor ihm liegenden StraBe 
nicht abgelenkt wird. 
5 Eine bekannte Weiterent^cklung dieser Technik ist 
die sogenannte "virtual realitv", oder "cyberspace" Hier 
werden in einer geschlossenen Brille, d. h. einer Brille in 
der die Sicht nach auBen versperrt ist, mit dem HUD 
bewegte raumliche VoUbilder reaiitatsnah in das Auge 

10 projiziert und interaktiv mit den Korperbewegungen 
wie etwa der Fortbewegung, Armbewegung, Fingerbe- 
wegung, Kopf- und Augenbewegung verindert 

In dem HUD wird das Bild auf einem Bildschirm ge- 
neriert und nach Reflektion an der Brillenoberfl&che in 

15 das Auge eingeblendet Das Auge sieht sozusagen uber 
die Brille als Vollspiegel auf das Display "um die Ecke 
herum" und bei der offenen Brille mit einem teildurch- 
lassigen Spiegel gleichzeitig die AuBenwelt. Da das Dis- 
play mit dem Kopf verbunden ist, folgt das Bild den 

20 Kopfbewegimgen. 

Einige HUDs sind mit einem "eye tracker" ausgerii- 
stet, der die Augenbewegungen mit Hilfe eines Bewe- 
gungssensor am Augapf el oder einer Kamera die Bewe- 
gungen der Augenpupillen oder der GefaBstruktur der 

25 Netzhaut verfolgt Das im HUD projizierte Bild kann 
dann entsprechend den Bewegungen innerhalb des Ge- 
sichtsf eldes elektronisch verschoben werden. 

Zur akkommodationsfreien Entspannung des Auges 
kann das Bild des HUDs uber die Projektionsoptik ins 

30 "Unendliche" versetzt werden. Mit der Einstellung un- 
terschiedlicher Blickwinkel der beiden Augen zum glei- 
chen Gegenstand, wird ein stereoskopisches, d. h. raum- 
liches Sehen ermdglicht 
Diese Anwendungen und Techniken verdeutiichen 

35 zum einen den hohen Stand der elektronischen Bildver- 
arbeitung, die mit vertretbarem technischen Aufwand 
bereits in der Lage ist, bewegte Bilder mit akzeptabler 
Qualitat fast verzdgenmgsfrei zu verarbeiten, zum an- 
deren den zunehmenden Bedarf an direkter BildQber- 

40 tragung ins Auge. 

Der heutigen Technik der HUDs sind jedoch Gren- 
zen gesetzt Die Genauigkeit der automatischen Verfol- 
gung der Augenbewegungen mit dem "eye tracker" ist 
wesentlich schlechter als die Ausrichtegenauigkeit und 

45 die Bildauflosung des Auges. Als Folge schwebt oder 
tanzt das eingeblendete Bild in dem Gesichtsfeld herum, 
was zu einer ungenauen Zielfindimg und Ermudung des 
Auges f iihrt. 

Aus diesem Grunde beschrankten sich die bisherigen 
50 Anwendungen der Vollbilddarstellung auf die geschlos- 
sene Brille, dh. die ausschlieBliche Einblendung von 
Fremdbildem. Die Anwendungen der offenen Brille mit 
der zusatzlichen Sicht nach auBen sind dagegen noch 
auf die Einblendung einfacher Zusatzinformationen in 
55 Form von Texten, Symbolen oder Bildumrissen be- 
schrankL 

Eine voUstandige raumliche und zeitliche Oberlap- 
pung von eingeblendeten Bildem auf das von dem Auge 
wahrgenommene reale Bild setzt die exakte raumliche 

60 und zeitliche Obereinstimmung der beiden Bilder auf 
der Netzhaut voraus. Diese kann erst durch eine direkte 
Aufnahme des Netzhautbildes und durch eine anschlie- 
Bende fast verzogerungsfreie deckungsgleiche Projek- 
tion des neuen Bildes auf das reale Bild hergestellt wer- 

65 den, was die Zielsetzung der Erfindung ist 

Es soil hier zun^chst der Stand der Techniken der 
Aiifnahme von Netzhautreflexbildem, der Bildabta- 
stung aus dem Augeninneren und der Projekdon von 
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Laserbildern direkt ins Auge, von der die Erfindung aus- chen Li chtsignalen bei dem stark verrauschtem Hinter- 

geht, dargestellt und diskutiert werden. grund gegeniiber der parallelen Aufnahmetechnik eine 

Die technische Realisierung einer kontinuierlichen Reihe anderer Vorteile, die den Nachteil der kurzen 

Abbildung des Netzhautreflexes der AuBenweit setzt Integrationszeitwettmachen.Diesesind: 

eine verwertbare optische Reflexion der Netzhaut vor- 5 

aus. Ihr Reflexionsvennogen ist z. B. von F.C Delori und 

KLP. Pflibsen in der Arbeit "Spectral reflectance of the 

human ocular fundus**, Applied Optics, VoL 28, No. 6, 

(1989) ausfiihrlich gemessen worden. Ab dem blauen 

sichtbaren Bereich (450 nm) mit dem nledrigen Wert 10 

von 0,2% nimmt das Reflexionsvennogen der Netzhaut- 

grube bis 10% im langwelligen roten Bereich (750 nm) 

monoton zu. Im Bereich der grdBten Augenempfindtich- 

keit und des scharfsten Sehens im grun-gelben Bereich 
zwischen 500 nm und 600 nm liegt das Reflexionsver- 15 
mogen dann zwischen 1 % und 2%. 

Ein Aufnahmesystem, far diesen Reflex, muB deshalb 
fiir eine urn den Faktor 50—100 geringere Leuchtdichte 
der Netzhaut als des Gegenstandsraumes ausgelegt 
sein, Eine weitere Beeintrachtigung der verfugbaren 20 
Lichtmenge ist durch die GroBe der Augenpupille von 
1—7 mm gegeben, die im Vergieich zu den iiblichen Fur die Zielsetzung der Erfindung ist jedoch der ent- 
technischen Aufnahmesystemen wie Photo- und Video- scheidende Vorteil der seriellen Bildabtastung die wei- 
kameras, relativ klein ist Die Aufnahme des von der tere Moglichkeit sie mit einer zeitversetzten synchro- 
Netzhaut reflektierten Lichtes setzt aus diesen beiden 25 iien seriellen Laser-Bildprojektion ins Auge zu kombi- 
Grunde einen besonders empflndlichen Lichtsensor nieren eroffnet 

voraus. Wegen dieser Vorteile der seriellen Aufnahme gegen- 

Es ist bekannt, daB ein strukturiertes Reflexbild im uber Film und Videoaufnahmen werden sie seit Anfang 
Bereich der Netzhautgrube oder Fovea centralis bei der der funfziger Jahre vor allem fur die Bildaufnahme im 
Abbildung im Auge entsteht Dies wird z. B. von Cam- 30 Mikroskop eingesetzt Eine serielle Abtastung kann 
pell, F.W. and Green, D.G. in dem Artikel: "Optical and dreierlei realisiert werden, erstens durch eine Aachen- 
Retinal Factors Affecting Visual Resolution", J. Physiol hafte Beleuchtung des Gegenstandes und einer punkt- 
181, 576—593 (1965) beschrieben. Hier wurde eine hell formigen Abtastung mit einem Photoempfanger, zwei- 
erleuchtete ausgedehnte Gitterstruktur auf die Netz- tens der Abtastung des Gegenstandes mit einer punkt- 
haut abgebildet und das durch das Auge reflektierteBild 35 formigen Lichtquelie und flachenhafter Aufnahme mit 
mit emem Teilerspiegei aus dem Strahlengang abge- dem Photoempfanger und drittens durch die punktfor- 
lenkt und auBerhalb des Auges in einer Bildebene scharf mige Beleuchtung und die gleichzeitige punktfdrmige 
abgebildet Die flachenhafte Abbildung des Gitters nach Abtastung mit dem Photoempfanger mit Verwendung 
der Reflexion an der Netzhaut, d h. nach zweimaligem der gleichen Scaneinrichtung. Die zwei ersten Metho- 
Durchgang durch das Auge, diente der Besdnunung der 40 den werden als "flying spot" und die dritte als ''confocal 
Modulationsubertragungsf unktion des Auges. Die pho- scanning^ Aufnahmetechnik bezeichnet 
tometrische Auswertung zeigte dafi die Qualit^t des Re- In den beiden ersteren ist entweder die Quelle oder 
flexbiides, der von dem Auge selbst wahrgenommene der Empfanger starr und dafiir jeweils der Empfanger 
Bildquaiitatsehrnahekommt oder die Quelle auf dem Gegenstand in Bewegung. In 

Die von Campeil u^L verwendete geschlossene stati- 45 dem dritten werden Quelle und Empfanger gemeinsam 
sche Aufnahmevorrichtung mit extrem heller Bildbe- in dem scannenden Abtastpunkt (konfokal) abgebildet, 
leuchtung (Blitzlicht) am ruhig gesteliten Auge ist nicht aber sind gegeneinander unbeweglich- 
geeignet um die lichtschwachen dynamischen Bilder der Eine Aufnahme des flachenhaften Netzhautreflexes 
AuBenweit auf der Netzhaut bei den raschen, natiirli- der AuBenweit mit einem scannendem Photoempfan- 
chen Eigenbewegungen des Auges aufzunehmea Dies 50 ger, wie die Erfindung vorschlagt, ist in diesem Sinne die 
erfordert lichtempfindliche, schnelle Detektoren und ei- erste Art der "flying spot* Bildaufnahmetechnik. Eine 
ne Aufnahmetechnik, die in dem offenen Strahlengang zeitversetzte synchrone Laserbildprojekton rait Hilfe 
Fremdlicht sehr effizient unterdriickt und Bilder minde- der gleichen Scaneinrichtung kann im Sinne der gemein- 
stens mit der Wiederholfrequenz der ublichen Video- samen punktformigen scannenden Abbildung von Be- 
normen aufnehmen kann. 55 leuchtungsquelle und Photoempf^ger auf der Netz- 

HeutekommendafurinFragedieCCD-Kameras,die haut als eine konfokale scannende Technik aufgefaBt 
alle Bildpunkte parallel nach einer festen Integradons- werden* aber keine konfokal scannende Aufhahmetech- 
zeit aufnehmen, und serieU scannende Bildaufnahmesy- nik, weil die RoUen des Photoempfangers und des La- 
steme mit Einzeldetektoren (Photodioden oder Photo- sers gegenOber der konventionellen Anwendung ver- 
muldpliem]^ in denen die Bildpimkte zeitlich hinterein- eo tauscht sind. In der Erflndung dienen die Empfangssi- 
ander abgetastet werden. Beide Techniken sind den ub- gnale zur zeitversetzten Modulation der Laserquelle, 
lichen Videonormen angepaBt bei dem ublichen Verfahren dient die Laserquelle zur 

Ein grundsatzlicher Vorteil der Verwendung der Beleuchtung beim gleichzeidgen Empfang der Lichtsi- 
CCD-Aufnahmetechnik ist die lange Integrationszeit in gnale. 

jedem Bildpunkt von z. B. 20 ms, gegenUber der kurzen 65 Um den Neuheitsgrad der Erfindung und ihrer techni- 
Verweildauer in jedem Bildpunkt von nur 40 ns beim schen Ausfuhrungen besser sichtbar zu machen, soli der 
Scannen. Die serielle Aufnahmetechnik hat jedoch fur Stand der Anwendungen der Bildaufnahme und Laser- 
die Aufnahme der sehr schwachen, schnell veranderli- projekdon ins Auge nachfoigend genauer dargelegt 



— serielle Signalverarbeitung, die eine direkte ana- 
ioge Weiterverarbeitung des Bildes in Echtzeit er- 
moglicht 

— efflziente Streulichtunterdruckung durch das 
kleine momentane Gesichtsf eld der Abtastung 

— rauscharme hohe Vorverstarkung der verwen- 
deten Avalanche-Photodioden und Photomulti- 
pliem 

— hohe Signaldynamik, die den starken Variatio- 
nen der Bildhelligkeit auf der Netzhaut entgegen- 
kommt 

— effiziente analoge Rauschunterdruckung, Z.B, 
durch phase-lock-in-Detektlon bzw. Signal-Korre- 
lation 

— einfache Behebung von Abbildungsfehlem. 
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werden. 

O. Pomerntzeff und R.H. Webb haben ais erste die 
zweite Art der "flying spot" Aufnahmetechnik mit Hiife 
eines gescannten Laserstrahles als Beleuchtungsquelle 
und einem starren groBflachigen Photomultiplier als 
Empf anger zur Aufnahme der Innenstruktur des Auges 
in dem US Patent 4.213,678 von Sept 1980 "Scanning 
Ophthahnoscope for Examining the Fundus of the Eye" 
beschrieben. 

Eine Erweiterung dieser Technik zu einer konfokalen 
Anordnung mit dem gleichzeitigen scannen der Laser- 
strahl und der Empfangsachse des Photomultipiiers, 
wurde von R. H. Webb, G. W. Hughes und F.C Delori in 
dem Artikel "Confocal scanning laser ophthalmoscope" 
in Applied Optics, Vol 26, No. 8, pp 1492-1499 (1987) 
vorgestellt 

In diesem Gerat wird die Netzhaut durch einen La- 
serstrahl rasterformig abgetastet Der Laserstrahl be- 
leuchtet Punkt f Or Punkt und Zeile f Or Zeile die Vorlage. 
Der Photoempfanger (Photomultiplier) miBt das jeweils 
reflektierte Licht und setzt die MeBwertfolge in ein Vi- 
deosignal um. Ein Femsehmonitor stellt das Videosignal 
schlieBlich als Bild dar. Diese drei Vorgange erfolgen 
exakt synchron. Wahrend der Laserstrahl Zeile fur Zeile 
den Augenhintergrund abtastet, wird gleichzeitig das 
Fernseh^ignal aufgebaut 

Der Laserstrahl durchlluft zun^chst einen Modulator, 
fiber den die Beleuchtungsintensitat gesteuert werden 
kann. Die horizontale Zeilen-Ablenkung wird meist mit 
einem schnell drehenden Polygonspiegel, die Vertikal- 
ablenkung durch einen Schwingspiegel durchgefOhrt 
Der Drehpunkt der Abtastbewegung liegt in der Puppil- 
lenebene des Auges. Das vom Augenhintergrund reflek- 
tierte bzw. zuriickgestreute Licht wird iiber die gesamte 
Pupiilenoffnung gesammelt und dem Photoempfanger 
fiber eine Abbildungsoptik zugeleitet Die Strahiablen- 
kung wird dadurch ruckgangig gemacht, und man erhalt 
ein stationares Lichtbundel, das auf einer kleinen Detek- 
torflache abgebildet wird. 

Die Moglichkeit der Verwendung der konfokalen Ab- 
bildung im Ophthalmoskop zur Projektion von kunstli- 
chen Bildern mit Hilfe einer Laserprojektion in das Au- 
ge, wurde von Webb u. aL in dem obengenannten Arti- 
kel erkannt und wie folgt beschrieben: . . . The laser 
beam is deflected by a fast (15-kHz) horizontal scanner 
and a slow (60-Hz) vertical scanner to project a standard 
format TV raster on the retina. Modulation of the beam 
permits projection of graphics or even gray scale pictu- 
res in the raster. While the patient is seeing the TV 
picture projected on his/her retina, an image of the reti- 
na is displayed on a TV monitor . . 

Die Direktprojektion von modulierten Lichtreizen 
und Mustem wird in den modemen Laser-Scan Opht- 
hahnoskopen (wie z. B. von der Firma Rodenstock in 
Munchen) hauptsachlich ffir Visusanalysen, Video- Vi- 
susbestimmungen imd Kontrastempflndlichkeitsmes- 
sungen bei jeweils nur einer LaserwellenlSnge verwen- 
det. 

Weitere Vorschlage zur direkten Bilderubertragung 
mit Lasern ins Auge sind aus den folgenden zwei Schrif- 
ten bekannt: 

In der europaischen Patentschrift 0 473 343 Bl von Nov. 
1995 der Firma Sony Corporation mit dem Titel "Direct 
viewing picture image display apparatus^ ist ein Direkt- 
sicht-Bildwiedergabegerat bekannt, das im wesentii- 
chen nur die technischen Losungswege aus den frfiher 
bekannten und hier bereits zitierten Veroff entlichungen 
der konfokalen Abbildung beinhaltet, und in den auf 



dem markteingefuhrten Laser Scanning-Ophthahnosco- 
pen, wie der Firma Rodenstock Instrumente in Mfin- 
chen realisiert worden sind. 
Die technische Losung zur Erweiterung der Bilduber- 
5 tragung von nur einer auf drei Farben. die in den An- 
spruchen 10 und 1 1 dieses Patentes beschrieben wird, ist 
auch in anderen Laser-Display-Anlagen seit vielen Jah- 
ren realisiert und stellt deshalb ebenso keine Neuheit 
dar. Die Verschiebung der Tiefenlage der Bilder auf der 

10 Netzhaut, die in den Ansprfichen 12 bis 16 beschrieben 
ist, wird durch gleichartige MaBnahmen in den bereits 
existierenden Oeraten durchgeffihrt 

Die Trennung von zwei Strahlen durch Polarisations- 
unterscheidung wie sie in Anspruch 16 bis 19 und in 

15 Fig, 6 des Patentes beschrieben wird, um ein gleiches 
Bild in beide Augen zu projizieren, ist grundsatzlich erne 
ungeeignete Methode um "echte" dreidimensionale Bil- 
der darzustellen, da diese Bilder hier keinen perspektivi- 
stischen Unterschied aufweisen. Daruber hinaus erlaubt 

20 diese Methode keine dynamische und individuelle An- 
passung an die Augenausrichtung und ist deshalb tech- 
nisch schwer umsetzbar. 

In einer zweiten europaischen Anmeldung der Firma 
Motorola Inc. Nr. 0 562 742 Al mit der Bezeichnung 

25 "Direct retinal scan display" von August 1993 wird ein 
Direktsicht-Bildwiedergabegerat beschrieben, das wie 
das oben beschriebene Patent von Sony auch die dh*ekte 
Bildubertragung auf die Netzhaut betrifft, jedoch mit 
dem Unterschied, daB die Projektion fiber die Umlen- 

30 kung fiber eine dem Menschen aufgesetzte BrUle durch- 
geffihrt wird. 

Diese Patentanmeldung bringt gegenfiber der lange 
bestehenden Technik keine neue Ldsungsansatze. Die 
direkte Montage des gesamten Displays am Kopf des 
35 Betrachters im Anspruch 4 bzw. die Verwendung einer 
Umlenkung des Strahlenganges des Projektors fiber ei- 
ne Brille im Anspruch 5 ist bei "virtuah-ealit/* Brillen 
bzw. bei Head-Up-Display im Pilotenheimen bereits 
eingeffihrt 

40 Damit eine Abbildung auf der Netzhaut gelingt, mus- 
sen verschiedene optische Anforderungen an die Laser- 
strahlumlenkung erfullt werden, die auBer der besonde- 
ren Auslegung der Strahlffihrung nach der Strahlablen- 
kung, auch eine spezielle Brillenglaswolbung erfordert 

45 Die Wege zur Losung dieser grundlegenden optischen 
Problematik werden in dieser letztgenannten Patentan- 
meldung jedoch nicht betrachtet oder erwShnt 



Beschreibung der Erfuidung 
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Die Erfindung schiagt eine seriell arbeitende Aufnah- 
me- und Projektionsvorrichtung vor, die es ermdglicht, 
die auf der Netzhaut des menschlichen Auges beim na- 
turlichen Sehvorgang erzeugten Bilder der AuBenwelt 
55 aufzxmehraen und mit elektronischer Bildverarbeitung 
zu modifizieren, bzw. zu erganzen. Dieses Bild dann 
nachfolgend mit Hilfe von Laserstrahlbildprojektion zu- 
ruck ins Auge zu projizieren und mit dem Originalbild 
synchron zu uberlagem. Die Erfmdung sieht femer vor, 
60 daB sowohl bei der Aufnahme, als auch bei der Projek- 
tion gleichzeitig die Strahlung aller Grundfarben Rot, 
Grfin und Blau detektiert bzw, projiziert wird. 

Diese Aufgabe ist grundsatzlich eine andere als die 
eines konfokalen Laser-Scanning-Opthahnoskops bei 
65 dem die Netzhaut im gleichen Abtastvorgang gleichzei- 
tig beleuchtet und abgebildet wird, denn in der Anord- 
nung gemaB der Erfindung wird in einem ersten Abtast- 
zyklus das fISchenhafte Reflexbild der AuBenwelt nach 
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dem '^flying spot" Verfahren abgetastet und erst in ei- 
nem zweiten zeitlich getrennten Abtastzyklus das nach- 
gearbeitete Laserbild auf die Netzhaut projiziert In ei- 
nem dritten Abtastvorgang wird wieder das Reflexbild 
gewonnen, in dem vierten wieder das Laserbild proji- 5 
ziert usw. Da diese Vorgange zeitlich so schnell wech- 
seln, entsteht fur das Auge, wie bei der Betrachtung vom 
Femsehen oder Film, ein kontinuierlicher Ablauf in dem 
das Laserbild synchron und deckungsgleich, unabhangig 
von den Augenbewegungen, dem Originalbild folgt 10 

Die Erfindung unterscheidet sich auch von alien dem 
Anmelder bekannten Vorschiagen zur direkten Laser- 
projektion ins Auge, sowohl der Projektion von Fremd- 
bildem in der geschlossenen Brille (cyberspace), als auch 
der Zusatzbildem in einer offenen Brille (HUD), durch 15 
die hier zum ersten Male vorgeschlagene direkte Kop- 
pelung der Projektion mit dem momentanen Bildinhalt 
der Aufienwelt \md die neuardgen technischen Ausfuh- 
rungen zu ihrer Realisierung. 

Die Aufhahme und bildhafte Weiterverarbeitung des 20 
Netzhautreflexes ist durch den raschen Fortschritte in 
der Aufnahme- und Verarbeitungstechnik von schwa- 
chen optischen Signalen moglich geworden. Die Be- 
strahlungsstarke die die Netzhaut in der naturlichen 
Umgebung ausgesetzt ist betragt von der hellsten Au- 25 
Benbeleuchtung von IQ-"^ W cm~^ bis etwa 10"^ W 
cm~2. Bei schwacher Innenbeleuchtung, unter Lesebe- 
dingungen betragt sie 10"^ W cm"^ bis 10"^ W cm'^ 
(siehe z. B. "Safety with Lasers and Other Optical Sour- 
ces", D. Sliney and M. Wolbarsht, 1980). Mit einem Pho- 30 
ton-Counting Photomultiplier und punktueller Abta- 
stung mit Lasem in einer TV-Norm wurde eine Emp- 
findlichkeit bis zu 2 x 10"^ W cm"^ bei einem Signal- 
Rauschverhaltnis von 5 erreicht (s. R.H. Webb et al, 
"Flying spot TV ophthalmoscope". Applied Optics, VoL 35 
19, No. 17, pp. 299 (1980). 

Eine Erhdhung der Empfindlichkeit bis 10"^ W cm"^ 
kann z. B. erreicht werden durch verbesserte Rauschun- 
terdriickung, eine verrmgerte Ortsaufldsung, bzw. durch 
die Verwendung eines Spiral-Scans anstatt des TV-Ra- 40 
sterscans, der eine reduzierte Scan-Geschwindigkeit in 
der Mitte des Gesichtsfeldes und damit eine verlangerte 
Integrationszeit dort bietet 

Die Aufgabe der Erfmdung wird durch die in An- 
spruch 1 und 2 angegebenen Merkmale gelost In den 45 
Unteranspruchen sind vorteilhafte Ausgestaltungen und 
Weiterbildungen angegeben. 

In der nachfolgenden Beschreibung wird die Erfin- 
dung anhand von Ausfuhrungsbeispielen erlautert. Die 
Figuren ergSnzen diese Erlauterungen. Es zeigt: 50 

Fig. 1 ein Schemabild eines Ausfuhrungsbeispieles 
der Aufnahme- und Projektionsvorrichtung ins Auge 
nach AnsprQchen 1 bis 5 in einer Ausfuhrung wo die 
Abbildung zwischen dem Scanner und Auge uber zwei 
konkave reflektierende Flachen emen Hilfspiegels HS 55 
und die Innenseite der Brille BG durchgefuhrt wird. 

Fig.2 ein Schemabild eines Ausfuhrungsbeispieles 
der Aufnahme- und Projektionsvorrichtung ins Auge 
nach Anspriichen 1 bis 4 und 6 in einer Ausfuhrung wo 
die Abbildung zwischen dem Scanner und dem Auge an go 
der konkaven Hilfsspiegelflache BG', einer konvexen 
Hilfsspiegel HS' und der konkaven Innenseite des Bril- 
lengiases BG durchgefuhrt wird 

Fig. 3 ein Schemabild eines Ausfuhrungsbeispieles 
des starren Strahlenganges zwischen Aufnahme- und 55 
Projektionsvorrichtung mit Photoemp^ngem und La- 
sermodulatoren nach Anspruch 14. 

Fig. 4 ein Schemabild eines AusfOhrungsbeispieles 
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der flexiblen Kopplimg der Aufnahme und Projektions- 
vorrichtung an den Strahlumschalter und Scaneinheit 
mit Hilfe von flexiblen Glasfasem nach Anspruch 15. 

Fig. 5 ein Schemabild eines Ausfuhrungsbeispieles 
der Anbringung der Aufnahme- und Projektionsvor- 
richtung fur beide Augen in einem BrillengestelL 

Fig. 6 ein Schemabild eines Ausfuhrungsbeispiel des 
StraWenganges im Scanner bei Aufnahme des Netz- 
hautreflexes und anschlieBender Projektion des Biides 
auf die Gegenstande der Aufienwelt, durch eine Um- 
schaltung des horizontalen Scanspiegels um einen Win- 
kel von 90'' nach Anspruch 23. 

Fig. 7 ein Schemabild der opto-elektronischen und 
elektronischen Untereinheiten und ihren Verbindungen. 

Fig. 8 ein Schemabild des zeitlichen Ablaufs der Ab- 
tast- und Laserprojektionsvorgange 

Fig. 9 ein Schemabild des in Mikrobauweise im Bril- 
lengestell integrierten Scanner mit Glasfaserkoppiung 
zu einer tragbaren Empfangs- und Projektionseinheit 
und drahtloser Obertragung zum Bildverarbeitungs- 
computer. 

Die Erfindung schlagt gemaB dem Anspruch 1 eine 
scannende Aufnahmevorrichtung vor um den licht- 
schwachen Reflex von Gegenstande der Aufienwelt 
AW auf der Netzhaut NH des Auges AA seriell aufzu- 
nehmen wie, in den Fig. 1 bis Fig. 3 dargestellt ist 

Die gleiche Abbildungs- und. Scanvorrichtung wird 
auch verwendet um das verarbeitete Bild mit Hilfe von 
Lasem und Bildmodulatoren iiber den entgegengesetz- 
ten Lichtweg auf die Netzhaut zeitversetzt gemafi An- 
spruch 2 zu projizieren, wie auch in Fig. 1 bis Fig. 3 
dargestellt ist 

Der zentrale Gegenstand der Erfindung ist eine spe- 
zielle Brille, die einem Betrachter aufgesetzt wird, wie in 
Fig. 5, Fig. 6 und Fig. 9 gezeigt ist Die Brillenglaser BG 
dienen als Strahlteiler. In Transmission, fur das Licht aus 
der Aufienwelt und in Reflexion, als eine Abbildungsfla- 
che des von der Netzhaut durch das Auge ruckgestreu- 
ten Uchtes, das mit Hilfe weiterer Abbildungseiemente 
und eines zweiachsigen Scanner ffir die Horizontal- 
HSS und Vertikalablenkung VSS emem PhotoempfSn- 
ger zugefuhrt wird (Fig. 1 bis Fig. 4). 

Der Strahiengang wird gleichzeitig derart gestaltet 
dafi die Verlangerung der Sichtlinie vom Detektor 
durch die Brille immer in der absorbierenden Schicht 
einer Strahlungssenke SS mundet Die Verlangerung 
der Sichtlmie des Auges durch die Brille lauft dagegen 
zur Aufienwelt AW (Fig. 1 bis Fig. 6). 

Die einfachste Methode der Strahlteilung an den Bril- 
lenglasem BG ist die Verwendung von 50% transmittie- 
renden und 50% reflektierenden Spiegelglasern. Es 
konnen auch aktive elektronisch steuerbare Spiegel, die 
von vollstandiger Transmission bis voUstandiger Refle- 
xion in den beiden Abtastzyklen umschalten, eingesetzt 
werden. 

Das Auge AA bildet von der Aufienwelt AW parallele 
Oder nahezu parallele Strahlbandel auf der Netzhaut ab. 
Der Drehpunkt der Strahlbundel bei unterschiedlichen 
Betrachtungswinkel zur Aufienwelt liegt in der PupiUe 
des Auges AP. 

Die Erfindung geht von einer gleichzeitigen Aufnah- 
me und Projektion in beide Augen wie in Fig. 5 und 
Fig. 6 gezeigt wird und damit einem weitgehend identi- 
schen Strahiengang fQr das linke und rechte Auge. Bei 
Fehlsichtigen, auch mit unterschiedlicher Brechkraft des 
linken und rechten Auges, sieht die Erfindung vor, dafi 
entweder die Brillenglaser in ihrer Brechung durch ent- 
sprechende unterschiedliche Auslegung der WOlbung 
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der Aufienseite und der Innenseite individuell angepaBt 
sind. bzw. daB Kontaktlinsen getragen werdea Ffir Nor- 
malsichtige ist die Wdibung der Innen- und AuBenseite 
der Brillenglaser die Briilenglaser BG identisch. 

Das von jedem einzelnen Bildpunkt der Netzhaut aus 5 
dem Auge zurruckgestreute Licht ist in gleicher Weise 
eine nahezu paralleles StrahlenbUndel, der den identi- 
schen Weg wie das einfallende Licht in entgegengesetz- 
ter Richtung auf die Innenseite des teilweise reflektie- 
renden Briilenglases BG failt. Die Krummung dieser 10 
Fiache wird so gestaltet, daB gemeinsam mit der Augen- 
linse ein zweites Bild des Bildpunktes auf der Netzhaut 
in der Zwischenebene ZE entsteht (Fig. 1). Ein Hilfsspie- 
gel HS, kollimiert die Strahlen emeut und biidet sie so 
ab, daB sie uber den gemeinsamen Drehpunkt (sie auf is 
der anderen Seite durch die Augenpupille) auf der Ach- 
se des horizontalen Scannerspiegels HSS verlauft Eine 
vertikale Ablenkung wird durch einen zweiten Scanner- 
Spiegel VSS durchgef uhrt 

Die Abbildung aus und ins Auge mit Hilfe der beiden 20 
Spiegel, Hilfsspiegel und Brillengiasspiegel bei gleich- 
zeitiger freier Sicht durch das Brillenglas BG zur Au- 
Benweh AW erfordert relativ starke Strahlablenkung. 
Die gegenlaufige Umlenkung uber zwei konkave Spie- 
gelflache hebt zum Teil die dabei auftretenden Abbil- 25 
dungsfehler auf. Der gegenlaufige sonst identische 
Strahlengang von Bildaufnahme und Bildprojektion 
vermeidet auch zum groBen Teil die Entstehung von 
Bildverzerrungen im Auge auf. 

Bei spharischen Spiegeln treten jedoch wegen ihren 30 
starken Abbildungsfehlem trotzt der relativ kleinen er- 
forderlichen Ablenkwinkel von < ± 10* restliche Bild- 
stdrungen auf. Fur die Abbildung und Umlenkung ins 
Auge sind deshalb hochwertigere Spiegelsysteme» wie 
konkave Parabolspiegel und elliptische Spiegel ui An- 35 
spruch 5 vorgesehen. Eine effiziente Reduktion der Ab- 
bildungsfehler ist nach Anspruch 6 auch mit Hilfe der 
Spiegelung an zwei konkaven BG imd EG' und einer 
konvexen Flache HS moglich. Hier kann als Vollspiegel- 
flache BG' die zweite Halfte des Briilenglases, gleicher 40 
konkaven Krummung wie BG verwendete werden. 

Die Erfmdung geht davon aus daB jede Art von zwei- 
achsigen Bildscannem verwendet konnen wie z.B. 
Drehspiegel oder Polygonspiegel fur Zeilenablenkung 
und Schwingspiegel fur Vertikalablenkung bzw. akusto- 45 
optische Ablenkeinheiten fiir beide Achsen. 

Mit einer rasterformigen Abtastspur mit getrennter 
horizontaler und vertikaler Ablenkung kann der Aufbau 
des Bildes konform mit den gebrauchlichen Video-Nor- 
men wie VHS und NTSC und HDTV gestaltet werden 50 
(Anspruch 9). 

Es kdnnen aber andere Abtastspuren, die dem Bild- 
aufbau des Auges besser angepaBt sind als der Raster- 
scan, verwendet werden, wie z. B. ein Spiralscan. Die 
groBte Sehscharfe in der Netzhaut (Retina) ist im Be- 55 
reich der sogenannten Fovea centrales, die im Gesichts- 
f eld nur einen kleinen Winkelbereich von etwa ± 2*" urn 
die Sehachse aufnimmt Wenn sich die Aufmerksamkeit 
auf ein Objekt richtet, werden die Augen normalerweise 
so bewegt, daB die vom fixierten Objekt ausgehenden eo 
Strahlen auf die Fovea centralis fallen. 

Ein Spiralscan der Bildabtastung, in dem die Aufent- 
haltsdauer des Abtaststrahles in Richtimg zur Sehachse 
kontinuierlich zunimmt, ware dadurch wesentiich besser 
dem Aufbau der Netzhaut angepaBt als ein Rasterscan. 65 
Durch die verlangerte Aufenthaltsdauer wird dadurch 
auch ein entsprechend hoheres Signal/Rauschen-Ver- 
haltnis in dem mitderen Bereich erreicht 



Die Erfmdung sieht aus diesen Grilnden auBer der 
Verwendung eines Rasterscans in Anspruch 9 auch in 
dem Anspruch 10 auch vor, daB durch erne entsprechen- 
de Auslegung und Ansteuerung der beiden Strahlab- 
lenkeinheiten ein Spiralscan auch verwendet werden 
kann. 

Wie in einem Laser-scanning-ophthalmoskop wird 
der Strahlengang zwischen dem Projektions- und Emp- 
fangskanal mit Hilfe eines Schaltspiegels SUS getrennL 
Da der Durchmesser des Projektionsstrahls wegen der 
guten Bundelung und dem kleinen Durchmesser der La- 
serstrahlen kleiner ausgelegt werden kann als der Emp- 
fangsstrahl bietet sich die Maglichkeit an einen Loch- 
Spiegel zur Trennung der beiden Strahlengange wie in 
Fig. 3 und Fig. 4 dargestellt ist, zu verwenden. Eine effi- 
zientere Methode, die sich wegen der zeitlich altemie- 
renden Verwendung der beiden Strahlengange ergibt, 
ist der Einsatz eines Kippspiegels der die Strahlengange 
synchron mit der Abtastung umschaltet Diese Losung 
hat die Vorteile der geringeren optischen Verluste im 
Empfangskanal und der besseren optischen Abschir- 
mung des direkten Obersprechens von Projektions- in 
den Empfangskanal. 

Im Strahlgang der Projektionseinheit hinter dem 
Strahlschalter SUS ist wie in Fig. 3 gezeigt sieht die 
Erfindungsmeldung im Anspruch 17 eine Fokussierein- 
richtung FE, die die GroBe des Laserbildflecks in An- 
spruch 17 und des abgetasteten Flecks beim Empfang 
GFB in Fig. 3 auf der Netzhaut einstellt Zur Einstellung 
des von den Photomultipliem gesehenen momentanen 
Gesichtsfeldes dient nach Anspruch 18 eine gemeinsa- 
me Gesichtsfeldblende GFB im Strahlengang zweier 
Linsen. Die Einstellung der Gesichtsfeldblenden ist zur 
Anpassimg an die Beleuchtungsverhaltnisse an der 
Netzhaut und zur Einstellung der erwunschten Ortsauf- 
Idsung notwendig. Es ist vorgesehen, daB beide Einstel- 
lung uber Aktoren automatisch nach Rechnerbefehl 
durcfagefuhrt werden kdnnen wie in Fig. 7 dargestellt 
wird. 

Es ist in Anspruch 12 vorgesehen, daB der Netzhaut- 
reflex mit der Verwendimg von dichroitischen Filtem 
(DFR, DFG und DFB) und drei getrennten Detektoren 
(PMR, PMG und PMB) in bis zu drei Farbkanalen auf- 
geteilt ist und damit ein weitgehend unverfalschtes 
Farbbild aufgenommen werden kann. Auf der Lasersei- 
te wird ebenso mit dichroitischen Strahlteilem die 
Strahlen von bis zu drei Lasem im roten, grunen und 
blauen Spektralbereich (LR, LG, LB) nach der getrenn- 
ten Bildmodulation jeder Farbe (MR, MG, MB) auf ei- 
ner gemeinsamen Achse vereinigt 

Zur farbtreuen Bildaufnahme wird das optische Si- 
gnal mit dichroitischen Filtem DFR DFG und DKB im 
Empfangskanal in die drei Farbkomponenten vor den 
drei Photoempfangem, verzugsweise Photomultipliem 
PMR, PMG und PMB in die drei Grundfarben zerlegt 
und getrennt vermessen. Wegen der schwachen Uchtsi- 
gnale werden vor allem Photon-counting Verfahren 
zum Einsatz kommen. 

Die Erfindung sieht femer vor, daB das von dem De- 
tektor aufgenommene elektronische Bild nach einer 
Bildverarbeitimg mit Hilfe von Laserstrahlquellen und 
-modulatoren wieder in ein serielles optisches Bild um- 
gewandelt wird, und in einem zweiten Bildzyklus mit der 
gleichen optischen Einrichtung, — jetzt in der Funktion 
als Strahlablenkeinheit (Laser-Scanner) — nach Refle- 
xion an der Brillenglasinnenfiache in das Auge synchron, 
aber zeitversetzt mit der Abtastung des Originalbildes 
zuruckprojiziert wird. 
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Die Erfindung schlagt vor in Anspruch 20 die Peri- 
oden der Bildaufnahme und Bildprojektion zeitlich zu 
trennen, d. h. aiternierend durchzufuhren wie in Fig. 8 
dargestellt ist, um eine Stdrung der Aufnahme des 
schwachen Netzhautbildes der Aufienwelt durch die 
iichtstarkere Projektion zu venneiden. In einem ersten 
Bildzyklus wird z. B. das Netzhautreflexbild aufgenom- 
men und in dem zweiten wird das verarbeitete elektro- 
nische Bild in das Auge projiziert In dem dritten Bildzy- 
klus wird eine Aufnahme des Netzhautreflexbildes 
durchgefuhrt, in dem vierten wird wieder die Zuruck- 
projektion durchgefuhrt, usw. 

Wenn dieser Bildwechsel schnell genug ist, sorgt die 
Tragheit der Gesichtsinnes dafur, daB beide Bilder dem 
Betrachter uberlagert erscheinen, vorausgesetzt, daB 
die Zeitverzogerung fiir das in das Auge eingeblendete 
Bild unterhalb der Bewegungsdauer und Wahmeh- 
mungszeit des Auges iiegt, und daB die Stabilitat und 
Auflasung des eingeblendeten Bildes mit der Aufldstmg 
des Auges vergleichbar ist 

Damit, sowohl die unbewuBten schnellen Sakkaden- 
bewegiuigen des Auges mit einer mittieren Amplitude 
von 5 Bogenminuten und einer Dauer zwischen 10 und 
20 msec, als auch die schnellen Augenbewegungen von 
20** —30* /sec beim Verfolgen eines bewegten Objektes 
fiber einen groBeren Wnkel erfafit werden konnen, 
muB die Biidwiederholfrequenz ausreichend hoch sein. 
Mit einer Wiederholfrequenz zwischen 50 Hz bis 
100 Hz, sowie in der Femsehen- und Computertechnik, 
ist die Aufnahme den schnellsten Bewegungsvorgangen 
des Auges weitgehend angepaBt Dies gilt, sowohl fur 
einen Raster- ais auch einen Spiralscaa 

Weitere technische Anfordenmgen an die Aufnahme- 
vorrichtung betreff en die GroBe des erfaBten Gesichts- 
feldes und die Bildaufldsung der hier vorgeschlagenen 
Vorrichtung. Fur die meisten Anwendungen ist der Be- 
reich des scharfsten Sehens mit einem Durchmesser von 
10 und einer Anzahl von 7 Millionen Zapfen (Biidpbcel) 
in der Netzhautgrube (Fovea) aber auch der angrenzen- 
de Bereich mit wesentlich geringerer Auflosung bis et- 
wa 10* Durchmesser von Interesse. Fur diese Unter- 
schiedlichen Auflosungsanforderungen ist gerade der 
Spiralscan der Abtastspur besonders geeigneL 

Ais Lichtquellen zur Ruckprojektion der Bilder ins 
Auge smd Halbleiterlaser bzw. miniaturisierte Festkor- 
perlaser vorgesehen mit einer niedriger Dauerstrichlei- 
stung (< 300 jiW), die keine Gefahrdung des Auges 
verursachen konnen. Mit der Verwendung von Halblei- 
terlasem konnte die Bildmodulation direkt fiber ihre 
Stromversorgung durchgefuhrt werden. Damit alle Far- 
ben erzeugt werden empfiehlt sich die Verwendung von 
drei Lasem mit den Grundfarben rot, grun, blau. Wie 
das bekannte Farbdreieckdes menschlichen Gesichtsin- 
nes zeigt kdnnen alle anderen Farben sowie die Unfar- 
ben grau und weiB durch Farbsummation von mono- 
chromatischen Laserlinien dieser Farben gebildet wer- 
den. Die Erflndimg beinhaltet auch die Moglichkeit der 
Verwendung von einzelnen Farben als monochromati- 
sche Losung vor. 

Die Erfmdung sieht wie in Fig. 7 dargestellt einen 
Signal-Prozessor SP vor, der das direkte Bild von der 
Netzhaut elektronisch bearbeitet und alle Funktionen 
der Vorrichtung sowie die von Scaimem VSS/HSS und 
Laserfleckeinstellung imd GroBe der Gesichtsfeldblen- 
de LAA/GFB synchron koordiniert Der Bildverarbei- 
tungscomputer BVC Qbemimmt dann die vom Auge 
wahrgenommenen Bild oder Bilder anderer technischer 
Sensoren die fiber einen extemen AnschluB EA dem 



Computer zugefuhrt werden und bearbeitet sie nach 
einer vorgegebenen Software SW, bevor sie mit Hilfe 
des Signalprozessors auf die Laserstrahlen als Bildsignal 
aufmoduliert werden. 
5 Die Laser-Projektion ermoglicht auBer der Verarbei- 
tung des aktuellen vom Computer verarbeitetes Bild in 
das Auge zu projizieren und mit dem Originalbild zu 
verschmelzen, auch Fremdbilder, die dem Computer 
von extern zugeleitet werden, dem AuBenbild im Auge 
10 synchron zu Qberlagem. Wenn die Zeitspanne zwischen 
Bildaufnahme und -Projektion im Vergleich zu den 
schnellen Augenbewegimgen entsprechend kurz ist, 
wird das Auge, wie faei Betrachtung eines Fernsehschir- 
mes, keine Bildunterbrechung mehr wahmehmen. 
15 Die getrennte aber gleichzeitige Bildabtastung an 
beiden Augen erfaBt auch die perspektivischen Unter- 
schiede beider Bilder. Da diese bei der Laser-Zuriick- 
projektion in beiden Augen erhalten bleiben, ist eine 
Wiederherstellung des raumlichen Sehens gewihrlei- 
20 stet 

AuBer der Projektion von den Netzhautbildem nach 
Bildverarbeitung zuruck ins Auge ermoglicht die hier 
vorgeschlagene Einrichtung nach Anspruch 25 auch die 
Projektion dieser Laserbilder direkt auf die in der Um- 

25 welt befindlichen und vom Auge gesehenen Gegenstan- 
de. Dies Ausfuhrung der Erfmdung wird schematisch in 
Fig. 6 durch das Umklappen des Scanspiegels um einen 
Winkel von 90** schematisch dargestellt 

Die in der Erfindung verwendeten Bauelemente sind 

30 heute weitgehend miniaturisiert und kostengunstig er- 
haltlich. Die Strahiumlenkeinheit und Scanner konnen 
in einem einfachen Brillengestell B wie in Fig. 9 darge- 
stellt ist untergebracht werden. Mit Hilfe von Glasfaser- 
leitung GFL konnen Laserprojektionseinheit und Emp- 

35 fangseinheit abgesetzt in einem kleinen Gehause TOE, 
z. B. der GroBe eines Taschenbuches mit Batteriever- 
sorgung untergebracht werden. Der Datenaustausch. 
mit einem extemen fest installierten Bildverarbeitungs- 
rechner kann entweder fiber Radiowellen oder Infrarot- 

40 strahler erfolgen. Alle Elemente der Vorrichtung der 
Erfmdung kdnnten nach dem heutigen Stand der Tech- 
nik somit von einem Menschen muhelos getragen wer- 
den und der drahtlose Bilddatenaustausch mit dem ex- 
temen Rechner wurde seine unbeschrankte Bewe- 

45 gungsfreihelt enndglichen. 

Die verschiedensten Einsatzbereiche der Erfindung 
konnen in den nachfolgenden vier Kategorien zusam- 
mengefaBt werden: 



50 



55 



60 



— Aufnahme von Bildem der AuBenwelt, ihre Ver- 
arbeitung, Zuruckprojektion und Verschmelzung 
mit dem Originalbild im Auge. 

— Oberlagerung von Bildem anderer Aufnahmesy- 
steme, z. B. in von der gleichen Szene in anderen 
Spektralbereichen auf das direkte Bild 

— Oberlagerung von virtuellen Bildem, die alleine 
vom Computer hergestellt werden und 

— Aufnahme von Bildem der AuBenwelt und ihre 
Laser-Projektion nicht ins Auge, sondem auf die 
gleichen, vom Auge gesehenen Gegenstande der 
AuBenwelt 



In der ersten Kategorie sind Anwendungen mit dem 
Ziel, das von dem Auge aufgenomme'ne Bild durch ge- 
es zieite Bildsummation zu verbessem, z.B. ein ver- 
schwommenes oder lichtschwaches Bild zu verscharfen 
und verstarken, was fflr Sehbehinderte, aber auch fur 
Normalsichtige von groBer Hilfe ware. 
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Andere mdgliche Bildanderungen waren z. B. die An- 
derung der Farbe von Objekten durch neue Farbsum- 
matioiL Diese Technik konnte zur gezielten Weififar- 
bung von bestimmten Bereichen des Sehfeldes, und da- 
mit zur Ausloschung oder Verminderung der optischen 5 
lEiformationen verwendet werden. 

Die zweite Kategorie beinhaltet Oberlagerung von 
Bildem der gleichen Szene z. B. aus dem unsichtbaren 
intraroten Bereich oder von Radargeratea Diese Tech- 
nik wurde z.B. das Fahren oder Fliegen in der Nacht 10 
und bei Nebel oder Dunst wesentlich erieichtem. 

In medizinischen Anwendungen kdnnten z. B. Rdnt- 
genbilder, akustische Bilder und Bilder vom Kemspinto- 
mographen dem direkten Bild des K6rpers des Paten- 
tien oder seiner Organe zur Hilf estelJung des Arztes bei 15 
der Diagnose und in der Chirurgie uberlagert werden. 

Die dritte Kategorie umfaBt Anwendungen, in denen 
das Bild durch virtuelle Zusatzeinblendungen erganzt 
werden, wie z.B. in den Anwendungen der heutigen 
HUDs bei dem Fuhren von Fahrzeugen. Die Erfindung 20 
bietet den zusatziichen Vorteil der exakten Synchroni- 
sation der Einblendung mit dem Aufienbiid. Dadurch 
konnten Fremdbilder auf genau definierten freien Stel- 
len innerhalb des Direktbildes, z. B. mit geringem Bildin- 
halt, Oder als Stereobild in einer anderen Entfemung als 25 
die ubrigen Gegenstande, eingeblendet werden. 

Zu dieser dritten Kategorie gehSren interaktiye An- 
wendungen aus der Computertechnik, d. h. die Einblen- 
dung einer virtuellen Computermaus (Zielkreuzes), die 
alleine mit den Augenbewegungen (anstatt mit der 30 
Hand) uber reale Gegenstande der AuBenweh (auch 
Display) gefuhrt werden. Das Anklicken. oder ein Befehl 
konnte hier durch zusStzliche Augenbewegimgen z. B. 
Augenlidschlag, oder Stimme oder mit Tastendruck aus- 
gefiihrt werden. 35 

Diese dritte Kategorie beinhaltet auch cyberspace- 
Anwendungen, d.h. die Einblendung von virtuellen 
Computervollbildem in die geschlossenen Brillen. Mit 
Hilfe der Erfindung kdnnten Aufnahmen des Netzhaut- 
bildes der eingeblendeten virtuellen Bilder genutzt wer- 40 
dea um diese gegenuber den Augenbewegungen zu sta- 
bilisieren. 

Die vierte Kategorie beschreibt eine Art "aktives Se- 
hen", d. h. eine vom Auge gesehene und von der Abtast- 
vorrichtung aufgenommene Szene wird in dem nach- 45 
sten Abtastzyklus mit einem Laser-Biidscheinwerfer se- 
riell beleuchtet Diese so beleuchtete Szene wird wieder 
vom Auge wahrgenommen und fuhrt in dem darauffol- 
genden Zyklus zu einem vertodertem zweiten Laser- 
Beleuchtungsvorgang, der von einem dritten Vorgang, 50 
usw.gefolgtwird 

In dieser Weise entsteht eine optische Rttckkoppe- 
lungsschleife, die durch eine entsprechenden Auslegung 
der Beleuchtimg als positive oder negative Ruckkoppe- 
lung fur die verschiedensten Anwendungen genutzt 55 
werden kann, z. B. lun schwach erkennbare Objekte zu 
erhellen, deren Kontrast zu erhohen oder ihre Farbe zu 
andem. 

Patentanspruche * 60 

1. Vorrichtung zur Aufnahme des auf der menschli- 
chen Netzhaut des Auges abgcbildeten Bildes der 
AuBenwelt mit Hilfe einer scannenden Aufnahme- 
vorrichtung, dadurch gekennzeichnet, dafi die bs 
Strahlen der AuBenwelt durch die Giaser einer 
Brille transmittiert werden, die auf ihren Innensei- 
ten als gewdlbte abbildende Strahlteilerspiegel ge- 
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staltet sind und daB zur Aufnahme des von jedem 
Punkt der Netzhaut zuruckgestreuten und aus dem 
Auge austretenden parallelen StrahlenbQndel und 
zu ihrer Abbildung imd Umlenkung eine zweiachsi- 
ge Scanvorrichtung vorgesehen ist, die das Licht- 
bundel zu emem opto-elektronischen Detektor zur 
seriellen Aufnahme des Netzhautreflexes weiterlei- 
tet 

2. Vorrichtung nach Anspruch 1, dadurch gekenn- 
zeichnet, daB mit Hilfe eines Strahlteilers Laser- 
strahlen iiber den gleichen Uchtweg, die gleiche 
Scanvorrichtung sowie Abbildung und Umlenkung 
an der Innenseite der gewoibten Brillenglaser in 
umgekehrter Richtung wie das Reflexbild auf die 
Netzhaut abgebildet werden. 

3. Vorrichtung nach Anspruch 1 und 2, dadurch 
gekennzeichnet, daB mit Hilfe eines Strahlumschal- 
ters Laserstrahlen uber den gleichen Lichtweg, die 
gleiche Scanvorrichtung sowie Abbildung und Um- 
lenkung an der Innenseite der gewoibten Brillen- 
glaser in umgekehrter Richtimg wie das Reflexbild 
auf die Netzhaut abgebildet werdea 

4. Vorrichtung nach Anspruch 1 bis 3, dadurch ge- 
kennzeichnet, daB die momentane optische Sca- 
nachse von Scanner aus gesehen in ihrer Verlange- 
rung durch das Brillenglas immer in eine lichtabsor- 
bierende Strahlungssenke verlaufL 

5. Vorrichtung nach Anspruch 1 bis 4, dadurch ge- 
kennzeichnet, daB die Abbildung und Umlenkung 
der von Scanner ausgehenden Strahlenbiindel vor 
der Umlenkung der Brille ins Auge mit Hilfe eines 
konkaven Hiifsspiegels abgebildet und umgelenkt 
werdea 

6. Vorrichtung nach Anspruch 1 bis 4, dadiu*ch ge- 
kennzeichnet, daB die Abbildung der von Scanner 
ausgehenden Strahibundel vor der Umlenkung der 
Brille ins Auge sowohl mit Hilfe eines konkaven als 
auch konvexen Hiifsspiegels abgebildet und umge- 
lenkt werdea 

7. Vorrichtung nach Anspruch 1 und 2, dadurch 
gekennzeichnet, daB die Bildabtastung und Laser- 
projektion im Auge gegeneinander zeitlich ge- 
trennt imd altemierend mit einer festen Bildfre- 
quenz durchgefflhrt werden. 

8. Vorrichtung nach Anspruch 1 bis 3, dadurch ge- 
kennzeichnet, daB wahrend der Periode der Bildab- 
tastung zeitweise auch eine Laserbildprojektion ins 
Auge durchgef Ghrt wird 

9. Vorrichtung nach Anspruch 1 bis 4, dadurch ge- 
kennzeichnet, daB die Abtastspur uber die Netz- 
haut entsprechend den bekannten Video-Normen 
mit der Ablenkeinheit gef Qhrt wird 

10. Eine Vorrichtung nach den Anspruchen 1 bis 9, 
dadurch gekennzeichnet. daB die Abtastspur ra- 
sterformig uber die Netzhaut mit einer entspre- 
chenden Auslegung und Ansteuerung der Scanvor- 
richtung durchgefuhrt wird 

11. Vorrichtung nach Anspruch 1 bis 9, dadurch 
gekennzeichnet, daS die Abtastspur spiralformig 
uber die Netzhaut mit einer entsprechende Ausle- 
gimg imd Ansteuerung der Scanvorrichtung ge- 
fuhrt wird 

12. Vorrichtung nach Anspruch 1 bis 11, dadurch 
gekennzeichnet, daB im optischen Empfangskanal 
mit Hilfe von mehreren Strahlteilem und Photode- 
tektoren mehrere spektrale Bereiche des Emp- 
fangssignals unabhSngig voneinander detektiert 
werden kdnnea 
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13. Vorrichtung nach Anspruch 1 bis 12, dadurch 
gekennzeichnet, daB im Beleuchtungskanal mit Hil- 
fe von Strahiteilern melirere Laserstrahlen auf die 
gieiche Strahlachse gebracht werden konnen und 
dadurch gemeinsam auf die Netzhaut abgebildet 5 
werden konnen. 

14. Vorrichtung nach Anspruch 1 bis 13, dadurch 
gekennzeichnet, daB der Strahlengang der Laser- 
projektionseinheit und Empfangseinheit mit einer 
starren StrahlfQhrung ausgelegt ist 10 

15. Vorrichtung nach Anspruch 1 bis 13, dadurch 
gekennzeichnet, daB der Strahlengang der Laser- 
projektionseinheit mit Lasem, Bildmodulatoren 
und Strahiteilern fiber eine Glasfaser an den Strahl- 
umschalter gefuhrt wird. 15 

16. Vorrichtung nach Anspruch 1 bis 14, dadurch 
gekennzeichnet, daB der Strahlengang der Emp- 
fangseinheit mit Photoempfangem und Strahitei- 
lern fiber eine Glasfaser an die Strahlumschaltein- 
heitgefQhrtwird 20 

17. Vorrichtung nach Anspruch 1 bis 16, dadurch 
gekennzeichnet, daB im Strahlengang der Laser- 
projektionseinheit eine Strahlfokussiereinrichtung 
integriert ist womit die GroBe des Bildflecks der 
Laser auf der Netzhaut variiert werden kann. 25 

18. Vorrichtung nach Anspruch 1 bis 17, dadurch 
gekennzeichnet, daB im Strahlengang der Emp- 
fangseinheit eine variable Gesichtsfeldblende inte- 
griert ist womit die GrdBe des Abtastflecks auf der 
Netzhaut variiert werden kann. 30 

19. Vorrichtung nach Anspruch 1 bis 18, dadurch 
gekennzeichnet, daB das von den PhotoempfSn- 
gem aufgenommene Bild einem Bildverarbeitungs- 
computer zugeleitet wird der synchron mit der 
Bildabtastung die aufgenommenen Bilder bearbei- 35 
tet 

20. Vorrichtung nach Anspruch 1 bis 19, dadurch 
gekennzeichnet, daB das von einem Bildverarbei- 
tungscomputer verarbeitete Bild der Netzhaut, mit 
Hilfe von elektro-optischen Modulatoren im Strah- 40 
lengang der einzelnen Laserstrahlen ein Bild syn- 
chron aber zeitversetzt mit der Abtastung auf der 
Netzhaut entstehen laBt 

21. Vorrichtung nach Anspruch 1 bis 20, dadurch 
gekennzeichnet, daB Fremdbilder von anderen 45 
Sensoren als dem Auge in dem Bildverarbeitungs- 
computer mit dem dort abgespeicherten momenta- 
nen Netzhautbild drtlich und zeitlich synchronisiert 
wird und mit den Laserstrahlen zeitversetzt ins Au- 
ge projiziert werden. 50 

22. Vorrichtung nach Anspruch 1 bis 21, dadurch 
gekennzeichnet, daB Informationen im Computer 
generiert in dem Bildverarbeitungscomputer mit 
dem dort abgespeicherten momentanen Netzhaut- 
bild drtlich und zeitlich synchronisiert wird und mit 55 
den Laserstrahlen ins Auge projiziert werden, 

23. Vorrichtung nach Anspruch 1 bis 22, dadurch 
gekennzeichnet, daB mit Hilfe eines optischen 
Schaiters das AuBenlicht vor der Brille teilweise 
Oder ganz zusperrt 60 

24. Vorrichtung nach Anspruch 1 bis 22, dadurch 
gekennzeichnet, daB bei verminderter oder ge- 
sperrter Sicht nach auBen und bei Projektion von 
Laserbildem von fremden Sensoren oder Compu- 
tem auf der Netzhaut auch wUhrend der Laserpro- es 
jektion diese Bilder von den Detektoren aufgenom- 
men und dem Bildverarbeitungscomputer zuge- 
ftlhrt werden. 
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25. Vorrichtung nach Anspruch 1 bis 24, dadurch 
gekennzeichnet, daB die von der Netzhaut aufge- 
nommenen Bilder der AuBenwelt durch Umklap- 
pen des Strahlenganges um 180** gegenuber dem 
Achsenverlauf ins Auge den Strahl in die AuBen- 
welt zur Beleuchtung der von dem Auge gesehenen 
Objekte mit dem vom Rechner abgeleiteten Laser- 
bild verwenden. 
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